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Die folgenden Angaben sind den v 

Prufungsantrag gem. § 44 PatG ist gestellt 

© Vorrichtung und Verfahren zum Implementieren eines Bild-Spreadsheets 
© Ein Bild-Spreadsheet erstreckt die Spreadsheet-Struk- 

turen auf zweidimensionale (2D) und dreidimensionale 

(3D) Bilder und Bildsequenzen, wobei Zellen in dem Bild- 
Spreadsheet Bilddaten und mathematische Operationen 

zugewiesen sind, die Bildoperanden implementieren. Das 

Bild-Spreadsheet ist auf einem Bildsystem mit einem Pro- 
cessor zum Anzeigen einer grafischen Benutzerschnitt- 

stelle (GUI) auf einem Display implementiert. Ein Bild- 

Spreadsheet-Generator bewirkt, dafi die GUI ein Spreads- 

heet-Gitter mit einer Mehrzahl von Zellen mit zugeordne- 

ten Registrierungsmarkernanzeigt, wobei jederZelle eine 

Gleichung zugewiesen werden kann. Der Bild-Spreads- 

haet-Generator reagiert auf Bjlddaten mit zugeordnoten 

Regjstrierungsdaten zum Anzeigen einer Mehrzahl won 

Bildern in einem Tail der Mehrzahl von Zellen, wobei die 

Mehrzahl von Bildern so ausgerichtet und angeordnet ist, 

daft die Registrierungsrnarker von entsprechenden Zellen 

zusammenpassen. Der Bild-Spreadsheet-Generator ant- 

wortet auf Benutzereingaben zum Implementieren von 

Gleichungen in die Zellen zum Transformieren von Bil- 
dern. Vorbestimmte Bildtransformierende Funktionen, 

die durch den Benutzer fur jede Zelle vorgegeben werden 

konnnen, erzeugen transformierte Bilder in den Zellen. 

Unter Verwendung einer Bildsubtraktion konnen zum Bei- 

spiel Magnetresonanz-Angiographia (MRA)-Bilder, die 

Bilder enthalten, die das Eindringen eines Kontrastmirtels 

in ein vaskulares System darstellen, transformiert wer- 
den, urn das vaskulare ,.. 
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Beschreibung 

Hintergrund der Erfindung 

Die Erfindung betrifft das Anzeigen von Bildem und ins- 5 
besondere ein Bild-Spreadsheet zur Bearbeitung und Dar- 
stellung mehrfacher Bilder. 

Es ist bekannt, daB Spreadsheet-Anwendungsprogramme 
undSpreadsheet-Metaphera ein intuitives und bcwahrtes 
Verfahren zur Bearbeitung von numerischen Daten zur Ver- 10 
fugung steUen. Solche Daten sind im aUgemeinen Text- oder 
ASUI-Daten im Gegensatz zu anderen Daten mit anderen 
Formaten wie zum Beispiel grafische Daten. 

Auf dem Gebiet der medizinischen Bilderzeugung exi- 
stieren einige spezifische Probleme und Anforderungen bei is 
der gleichzeihgen Darstellung von mehreren Reihen und 
-mehreren Arten von Bildem. Mit den dreidimensionen Bild- 
gebungsverfahren, wie zum Beispiel CT, MR, PET, SPECT 
und 3D-UltraschaU, werden Volumina und nicht Bilder er- 
zeugt, die im aUgemeinen in Form von Stapeln von Quer-' 20 
schnittsbildern eines zu untersuchenden Patienten vorliegen 
Aus diesem Grund besteht die Notwendigkeit, mehrere Bil- 
der aus verschiedenen Verfahren gleichzeitig darzustellen 
Es 1st ublich, daB ein Patient mehrere Male mit einem ein- 
zigen Verfahren oder mit mehreren Verfahren untersucht 25 
wird. Im Falle einer Untersuchung mit mehreren Verfahren 
werden im gleichen Objektbereich verschiedene GroBen ge- 
messen. Aufierdem kann die raumhche Aufiosung der Bild- 
satze unterschiedlich sein. Urn verschiedene Bcurteilungen 
vornehmen zu konnen, werden haufig mehrere Untersu- 30 
chungen nut emem einzigcn Verfahren durchgefiihrt wie es 
zum Beis pi el bei der Kontrast-verstarkten magnetischen Re- 
sonanz-Angiographie der Fall sein kann, bei der vor und 
nach der Injektion eines Kontrastmittels in den Blutstrom 
Bilder aufgenommen werden. Weitere Beispiele sind die 35 
Beurteilung cincr Behandlung, bei der vor und nach dem 
Emgriff pathologische Bilder aufgenommen werden, oder 
Funktionsbilder, mit denen biologische Prozesse fiber eine 
bestimmte Zeitdauer uberwacht werden. 

Wohl bei den einfachen als auch bei den mehrfachen 40 
Verfahren fuhrt eine Bewegung des Patienten sowie die Re- 
produzierbarkeit der Abtastung zu Problemen bei der Bild- 
erzeugung. In bestimmten Fallen kommt es vor daB bei ei- 
nem Patienten die Bilder mit Abstanden von Tagen, Wochen 
oder Monaten aufgenommen werden. Selbst in dem Fall in 45 
dem der Patient fur eine Anzahl von schnellen Aufnahmen 
in einer Abtastvornchtung verbleibt, kann sich die Stellung 
bzw. Position des Patienten aus verschiedenen Griinden wie 
zum Beispiel der Atmung, einer Unbequemlichkeit, einer 
, Erregung oder der Verdauung verandern. Auch die Abtast- so 
vomchtung selbst kann aufgrund einer mechanischen Unge- 
nauigkeit zu einer Verschiebung fiihren 

Es besteht somit ein Bedarf, die Bilder aus verschiedenen 
Verfahren zur Anwendung bei der medizinischen Diagnose 
und Behandlung aneinander anzupassen. 55 



adsheet-Gitter mit einer Mehrzahl von Zellen anzeigt, denen 
Registnerungsmarker zugeordnet sind, wobei jeder Zelle 
eine Gleichung zugeordnet werden kann. Der Bild-Spreads- 
heet- Generator spricht auf Bilddaten an, die zugeordnete 
Registnerungsdaten zur Anzeige einer Mehrzahl von Bil- 
dem in emem Teil der Mehrzahl von Zellen aufweisen wo- 
bei die Mehrzahl von Bildem so ausgerichtet und angeord- 
net sind, daB die Registrierungsmarker der entsprechenden 
ZeUen aneinander angepafit sind. Der Bild-Spreadsheet-Ge- 
nerator spricht auf Benutzereingaben zur Implementiemng 
einer Gruppe von Gleichungen in einer ersten Gruppe von 
ZeUen an, urn die Bilder in der ersten Gruppe von Zellen zu 

tra n «fnrm i r» 



Mit vorbestimmten Bild-transformierenden Funktionen 
die durch einen Benutzer fur jede Zelle individuell einee- 
sttUt werden konnen, werden in den Zellen transformierte 
Bilder erzeugt. Zum Beispiel konnen unter Verwendung ei- 
ner ^Bikbubttaktion Magnetresonanz-Angiographie (MRA)- 
Bilder, die Bilder umfassen, die das Eindringen eines Kon- 
trastmittels in ein vaskulares System zeigen, transfonniert 
werden, urn das vaskulare System im Hintergrund auszu- 
blenden und den HuB des Kontrastmittels anzuzeigen In 
den Zellen konnen zweidimensionale Bilder, dreidimensio- 
nale Bilder und sogar Text angezeigt werden. Ein Eselsohr- 
Icon m emer ZeUe, ein pop-up-Fenster oder eine pop-up-Be- 
nutzer-Schnittstelle (UI) konnen aktiviert werden, um selek- 
Uv em Bild aus einer Mehrzahl von. der ersten Zelle zuge- 
ordneten Bildem anzuzeigen. 

Kurze Beschreibung der Zeichnurig 

Gesarntsy^lfn 6111 ^ BiId " S P readsheet implementierendes 
Fig. 2 zeigt das die Magnetresonanz-Angiographie imple- 
menUerende Bild-Sjpreadsheet; P 

Fig 3 zeigt das eine 3D Segmentation implementierende 
Bild-Spreadsheet; und 

Fig 4 zeigt ein FluBdiagramm des Betriebsverfahrens des 
Bild-Spreadsheets. 

Detaillierte Beschreibung^der bevorzugten Ausfllhrungs- 



Zusammenfassung der Erfindung 

Durch ein Bild-Spreadsheet wird die Spreadsheet-Meta- 
pher (ubergeordnete Struktur) auf zweidimensionale (2D) 60 
und dreidimensionale (3D) Bilder und Bildsequenzen er- 
streckt, wobei Zellen in dem Bild-Spreadsheet Bilddaten 
und mathematische Operationen zugeordnet sind, die Bild- 
operanden implementieren. Das Bild-Spreadsheet ist auf ei- 
nem Bildsystem implementiert, das einen Prozessor zur 65 
Wiedergabe einer grafischen BenutzerschnittsteUe (GUI - 
graphic user interface) auf einem Bildschirm aufweist. Ein 
Bild-Spreadsheet-Generator bewirkt, daB die GUI ein Spre- 



GemaB Fig. 1 werden ein Bild-Spreadsheet-Generator 10 
o^ em ;^ atuea zur Bearbeitung von zweidimensionalen 
(2D) und/oder dreidimensionalen (3D) Bildem' mit einem 
grafischen Anzeigesystem verwendet, so daB eine vertraute 
Arbeitsumgebung zur Bearbeitung vieler Arten von Bildda- 
ten geschaffen wird und sich eine bedeutende und beispiel- 
' °atte Veranderung gegenuber den in aUgemeinen Bildverar- 
beitungssystemen verwendeten "Pipeline"-ModeUen ergibt. 
Der Bild-Spreadsheet-Generator 10 ist mit einem Grafikge- 
nerator 12 eines Grafiksystems 14 mit einem Prozessor 16 
yerbunden. Der Grafikgenerator 12 wirkt mit dem Prozessor 
16 zum Beispiel uber eine Task-Karte 18 oder andere Funk- 
i?° n !, n 1 ? der Unterprogramme zusammen, um 2D und/oder 
JD-Bilder auf einem Schirm oder einer anderen Ausgabe- 
einnchtung zu erzeugen. Der Prozessor 16 arbeitet mit ei- 
nem Bildsymbol-Generator 20 zusammen, der eine Samm- 
lung von Programmobjekten zur Darstellung von Bildsym- 
bolen auf dem Ausgabe-Bildschirm beinhalten kann, die 
durch den Benutzer des Grafiksystems 14 leicht verstanden 
werden konnen. 

t ° er ^ ozessor 16 u mfaBt auch eine Einrichtungs-Schnitt- 
mr^-^^ M &t dne I«fische g Ben UtZ i 
Schm ts eUe (GIJIO und eine Anwendungsprogramm- 
SchmttsteUe (API) 26, wobei diese Komponenten 22^26 
mit emem SchnittsteUen-Server 28 verbunden sind, um mit 
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anderen Systemen 30 zusammenzuwirken, wie dem Internet gabefenster, wie zum Beispiel das Fenster 52, kann durch ei- 
fiir Femverbinduhgen; einem Hardcopy-Server (HcS) 32 . nen entsprechenden Befehl des. Benutzers oder des Grafik- 

zum Senden von Ausgabedaten zu einem Bildgerat oder generators 12, der auf eine Bedingung wie zum Beispiel 

Drucker 34 fur Hardcopy- Ausgaben; einem Datenbank-Ser- eine "query user for input"-Bedingung oder eine Fehlerbe- 

ver (DbS) 36 zum Speichem von Daten zum Beispiel- in ei- 5 dingung geoffnet oder geschlossen werden. Das Fenster 52 

nem Online-Speicher 38, einem Verarbeitungs-Server (PrS) kann ein pop-up-Fenster sein, das zur Eingabe von mathe- 

40 zum Speichem von Daten in dem Speicher 42 des Pro- matischen und anderen Operationen fur eine einzelne oder 

zessors 16 oder. anderen zentralen Prozessoreinheiten eine Gruppe von Zellen 50 verwendet wird. 

(CPUs); sowie einem Benutzer-Schnittstellen (UI)-Server Weiterhin ist auf dem Schirm auch ein Bereich 54 vprhan- 

44, der zum Beispiel unter Verwendung der Version 11 10 den, der ein Steuerpanel aus wahlbaren Tasks und scroUba- 

. (XI 1) des X WINDOWS Protokolls mit mindestens einer ren Taskleisten zur Verfugung stellt. Zum Beispiel konnen 

Eingabe- und/oder Ausgabe-(I/0)Einrichtung 46 wie einem Befehle oder Icons fur 2D, MPR, 3D, Winkel, Bereich, Ul, 

Bildschirm, einer Tastatur und/oder einer Maus zusammen- U2 und Fly, die mit verfugbaren Task-Karten korrespondie- 

wirkt. ren, zur Verfugung gestellt werden. Andere Befehle wie 

Bei einer bevorzugten Ausfuhrungsform ist der Grafikge- 15 Task-Karten oder Tabs konnen auch angezeigt werden, die 

nerator 12 durch die "Fly Through"-Software der Firma Sie- eine Auswahl von Befehlen wie Film, Save, Zpan und W/T 

mens Medical Systems Inc., Iselin, New Jersey, realisiert, . ermoglichen. Weiterhin konnen auch Icons, die mit copy 

die auf einer Workstation als Grafiksystem 14, wie zum Bei- screen, copy series, new page, clear image oder options be- 

spiel der "Prominence" -Workstation von der Firma Siemens . schriftet sind, oder andere Icons wie scrollbare Pfeil-Befehle 

Medical Systems Inc., Iselin, New Jersey, vertrieben wird, 20 vorgesehen sein. 

die eine weiterentwickelte Workstation zur medizihischen Um das Bild-Spreadsheet in das Haupt-Ansichtsfenster 

Bilderzeugung und Nachbearbeitung ist, die von der Firma 48 zu implementieren, kann der Bereich 54 des Schirms 

ISG Technologies, Kanada, hcrgestellt wird. Alternativ dazu auch Befehle zum Editieren von Zellen oder Icons wie cell 

kann das Grafiksystem 14 auch die "3D Virtuoso" Worksta- editor, add row, add column, evaluation all, load und save 

tion zur Nachbearbeitung von der Firma Siemens Medical 25 enthalten. DemgemaB kann ein Benutzer Zellen durch An- 

Systems Inc. sein, die optional auf einer Windows NT Piatt- klicken der Zelle, d. h. durch Bewegen eines GUI-Kursors 

form arbeiten kann und zum Beispiel das Laboratory Infor- auf die Zelle mit einer beweglichen Maus und durch Betati- 

mation System der Firma Medcom Information Systems gung des Mausknopfes auswahlen. Mit solchen Befehlen 

Inc., anwendet. Die GUI zur Anwendung der "Fly zum Editieren von Zellen kann der Benutzer eine Zelle edi- 

Through"-Software kann auf einer Sienet Magicview 30 tieren, Reihen und Spalten den Zellen 50 hinzufiigen, alle 

CT/MR Satellitenkonsole der Firma Siemens Medical Sy- Zellen auswerten, um das gesamte Spreadsheet der Zellen 

stems, Inc. implementiert werden, um als I/O-Einrichtung zu aktualisieren, um modifizierte Bilder oder Gleichungen 

46 zu arbeiten. Alternativ dazu kann als Grafiksystem 14 zu erzeugen, einzelne Zellen mit Bildem zu laden und das 

auch das in der US-PS 5.782.762 von Vining und/oder der gesamte Spreadsheet mit den gegenwartigen Bilderh, Glei- ■ 

US-PS 5.825.909 von Jang beschriebene Grafiksystem ver- 35 chungen und/oder Konfigurationen der Zellen zu speichem. 

wendet werden, wobei diese Druckschriften durch Bezug- Wie in Fig. 1 gezeigt ist, kann die I/O-Einrichtung 46 Zum 

name zum Bestandteil dieser Offenbarung gemacht werden Empfang von Benutzer-Eingaben optional mit dem Bild- 

sollen. Spreadsheet-Generator 10 verbunden sein, mit dem die Aus- 

Bei einer medizinischen 2D/3D-Bilderzeugung kann der wahl und Ausrichtung der Ansichten gesteiiert wird, wenn 

Bildsymbol-Generator 20 eine Sammlung von Programm- 40 der Benutzer auf den Schirm mit den Fenstern 48, 54 schaut, 

objekten sei, die metaphorisch medizinische Bildsymbole um durch die in den Zellen 50 dargestellten Bilder zu navi- 

auf dem UI der I/O-Einrichtung 46 darstellen, die fur einen gieren. 

Benutzer einfach verstandlich sind. Die Einrichtungs- Das Bild-Spreadsheel-System 10 kann Hardware und/ 

Schnittstelle 22 kann ein Satz von Objekten einer "Digital oder Software sein und kann als Unterprogramm in dem 

Imaging and Communications in Medicine" (DICOM)- 45 Grafikgenerator 12 oder auBerhalb des Grafiksystems 14 

Kommunikations-Schnittstelle sein, wahrend der Schnitt- realisiert sein. Das Bild-Spreadsheet-System 10 kann zum 

stellen-Server 28 ein DICOM-basierender Server sein kann, Beispiel eine getrennte Workstation, die mit dem Grafikge- 

der mit medizinischen Systemen 30 wie computergestutzten nerator 12 verbunden ist, oder ein PC sein, der ttber ein 

. Tomographie-Abtasteinrichtungen (CAT) und Rontgen- Netzwerk, wie zum Beispiel das Internet, mit dem Grafikge- 

strahlengeraten zusammenwirkt. Ferner kann der GUI-Ma- 50 nerator 12 verbunden ist. 

nager 24 der MOTJF-Manager fur X Windows und die API Wie in Fig. 2 gezeigt ist, konnen die ZeUen 50 des Bild- 

26 der Open Graphics Library (OpenGL)-Standard Grafik- Spreadsheets in einer typischen Spreadsheet- Art bezeichnet 

API sein. sein, bei der die Zellen 50, die Reihen bilden, numerisch be- 

Der Grafikgenerator 12 kann ein Segmentierungsmodul, nannt und die Spalten alphabetisch bezeichnet sind, so daB 

ein Modellbildungsmodul und ein interaktives Anzeigemo- 55 sich die Zellen Al bis A3, Bl bis B3, CI bis C3 usw. erge- 

dul umfassen. Mit dem Segmentierungsmodul werden wah- ben. Jeder Zelle 50 ist eine Formel oder eine Gleichung zu- 

rend der Simulation einer endoskopischen Ansicht verschie- geordnet, 'die auf anderen Anzeigeschirmen sichtbar sein 

dene interessierende Organe heraussegmendert und ein seg- kann, auf die durch Benutzerbefehle umgeschaltet wird, 

mentierter Volumen-Datensatz erzeugt. Das Modellbil- oder die in dem Bereich 54 des Anzeigeschirms in vorbe- 

dungsmodulkonvertiertdensegmentierten Volumen-Daten- 60 stimmten Anzeigebereichen fur Gleichungen wiedergege- 

satz in einen Satz von segmentierten polyhedralen Model- ben werden. Bei altemativen Ausfuhrungsformen kann das 

len, die eine Echtzeit-Wiedergabe mit dem interaktiven An- Bild-Spreadsheet 2D-Bilder gemaS der Darstellung in Fig. 

zeigemodul ermoglichen, Durch die GUI der I/O-Einrich- 2, 3D-Bilder gemaB der Darstellung in Fig. 3, Text gemaB 

tung 46 kann dem Benutzer ein Schirm mit Ansichtsfenstern Fig. 2 oder eine Kombination aus Text, 2D-Bildern und 3D- 

geboten werden, wie zum Beispiel ein Haupt-Ansichtsfen- 65 Bildem gemaB den Fig. 2 und 3 beinhalten. 

ster 48 gemaB den Fig. 2 und 3, das fur bestimmte Anzeige- GemaB Fig. 2 kann jede Zelle 50 Registrierungsmarker 

zwecke, die unten noch erlautert werden, in einzelne Spre- 56 enthalten, die sichtbar oder unsichtbar sein konnen, das 

adsheet-Zellen 50 unterteilt werden kann. Ein Benutzer-Ein- heiBt daB jede Zelle 50 zugeordnete Daten in Speichem' auf- 
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weist, die den Ort solcher Registrierungsmarker 56 spezifi- 
zieren, und der Bild-Spreadsheet-Generator 10 kann auf Be- 
nutzerbefehle zum TJmschalten zwischen der Wiedeigabe 
und der Nicht-Wiedergabe der Registrierungsmarker 56 ii 



und in die Zelle Al geladen werden. 

Beim Laden der Zellen kann der Bild-Spreadsheet-Gene- 
rator 10 automatisch die Registrierungsmarker fur jedes 
d;,,, . , , .„„_ und das BUd dann SQ fonnatierenj dafi ^ 



SSmT^f ^ 50 ^ 5 *3£^S^« den Re^stS "a^ 

stnerungsmarker 56 werden verwe.nHpt um h;» h;m„, u!_ i • . , 6 . 6 



strierungsmarker 56 werden verwendet, um die Bilder zu 
positionieren und auszurichten, wobei die Registrierungs- 
marker 56 in einer Standardeinstellung fur den Benutzer un- 
sichtbar sind, solange dieser wahrend des Ladens eines Bil- 
des und einer Sitzung zur Betrachtung nicht auf die Anzeige I 
der Registrierungsmarker 56 umschaltet. Zum Beispiel kon- 
nen die Zellen Al, Bl, CI fortlaufende Rahmen in einer Sit- 
zung einer Magnetresonanz-Angiographie (MRA) wieder- 

geben, in der ein Sate 58 von BlutgefaBen in umgebendem , „ k .,..„. n , , „,.., „ uer 

Gewebe in der Zelle Al angezeigt wird. Die Zellen B 1 und is trastmittel 66, die Zelle Bl das Bild mit etwas Kontrastmit 
22^£"- H m ^f " K-?™***- » Blut- tel in den BlutgefaBen und die Zelle a£SZ5£S£l 
gefaBe, wobei die Bilder 60 brs 62 die BlutgefaBe 58 mit Ablauf einer spezifizierten Zeit nach dem hESTS 
dem dann flieBenden Kontrastmittel darstellen. Die Regi- Kontrastmittels 66 zeigt «m Jandnngen des 

**:™E™^1 6 erm °g Uchen ^ Erzeugung von ver- Nach der Injektion des Kontrastmittels 66 erscheinen die 

Objektes, das heiBt 20 GefaBe hell. Die umgebende Anatomie bleibt im wesentli- 
""" A " * ' 4 * ' " • chen unverandert und kann durch Subtraktion des Bildsatzes 
ohne Kontrastmittel von dem Bildsatz mit Kontrastmittel 
entfemt werden. Der Benutzer kann dann die Zelle A2 unter 
Verwendung des Bild-Spreadsheet-Generators 10 anweisen, 



maB Fig. 2 positioniert und angezeigt werden. 8 

Es konnen auch andere Zellen-Operationen unterstiitzt 
werden, wie zum Beispiel mathematische Standard-Opera- 
tionen wie Addition, Subtraktion, Multiplikation und Divi- 
sion, die auf dem Gebiet der Bilderzeugung allgemein defi- 
niert und bekannt sind. Bei dem MRA-Beispiel in Fig. 2 zei- 
gen die Zellen Al, Bl und CI das zeitliche Eindringen und 
Verhalten eines Kontrastmittels 66 in die/den BlutgefaBen 
wobei die Zelle Al das Bild 58 der BlutgefaBe ohne Rou- 



tt Bildern 

der BlutgefaBe, die mit einer sehr genauen Ausrichtung __ 
orientieren sind. Die Registrierungsmarker stellen eine Vi- 
sualisierung einer darunterliegenden raumlichen Abbildung 
zwischen mindestens zwei Bildern oder Volumina dar, die in 

nundestens einer ZeUe des Bild-Spreadsheets durch den 25 einVzugwrdneTe Glekhung A2 

Bild-Spreadsheet-Generator 10 erzeugt werden. Bei einer ' - - 

solchen Abbildung wird jeder gegebene Punkt in einem Bild 
auf einen korrespondierenden Punkt in dem anderen Bild 
oder Volumen abgebildet. Bei dem Bild-Spreadsheet 



:C1- 



den dieses Abbildungen berechnet, um gemaB der folgenden 30 tion und die 



Al auszufiihren, die 
bewirkt, daB der Bild-Spreadsheet-Generator 10 das Bild 58 
von dem Bild 62 subtrahiert, so daB die Basis-BlutgefaBe 
entfemt werden und nur das Kontrastmittel 66 sowie sein 
Weg durch die BlutgefaBe dargestellt wird. Durch Subtrak- 



dadurch bewirkte Ausfilterung der BlutgefaBe 
aus dem Bild 62, mit der das Hintergrund-Gewebe aus dem 
Bild 62 entfemt wird, zeigen die Wege des Konlraslmittels 
in dem Bild 64 zum Beispiel Gesichtspunkte des Blutflus- 
ses, wie einen Terminus 68 des Blutflusses, der einen Ver- 



Beschreibung die anatomische Koharenz zu erhalten. Aus 
diesem Grund ist klar, dafi die in den Fig. 2 und 3 gezeigten 
Registrierungsmarker 56 nur beispielhaft zu verstehen sind 

und mcht unbedingt in den Zellen vorhanden sein mussen. , ,, , la „ , , 

D,c Registnerungsmarker 56 konnen in dem Bild-Spreads- 35 schluB oder einen Blutklumpen in den 1 u LfaBen indirie 
heet auch weder sichtbar noch unsichtbar sein. so„H* m mi , ren kann . In ahnJicher Wei J^ ^ "ZtTndl^mung" 

fluB um Tumore und andere Karzinome durch diese Sub- 
traktion angezeigt werden. 

Es kann auch Text in die Zellen wie zum Beispiel die 
Zelle A3 eingegeben werden, wobei dieser Text mit Glei- 
chungen zu anderen Zahlen addiert oder von diesen subtra- 
hiert werden kann. Die Zelle B2 kann sich zum Beispiel 
durch die Gleichung B2 = Al + A3 aus den Zellen Al und 

ad(> 1), nut der die Zelle Al in die Anzeige des Bildes 58 zum Beispiel in Form von Prasentltionsmaterial, wie Doku- 

menten oder Folien, ausgedruckt oder ausgegeben werden 
kann. Zusatzlich dazu kann jeder Zelle 50 einer Mehrzahl 
von anderen Zellen zugeordnet sein und/oder eine Mehrzahl 



heet auch weder sichtbar noch unsichtbar sein, sondem mit 
Bits, Zeigcrn, Speicherplatzen oder anderen Daten korre- 
spondieren, die eine Registrierung zwischen Bildern mit ei- 
nem durch den Bild-Spreadsheet-Generator 10 implemen- 
tierten Registrierungsverfahren ermoglichen. 

Die Zellen Al, Bl, CI konnen Bilder enthalten, die mit 
Dateien Fl, F2, F3 in dem Speicher korrespondieren, die zu- 
vor von einer Bilddatenquelle der MRA-Sitzung empfangen 
wurden, wie zum Beispiel einem Speicher des Grafiksy- 



geladen wird, eine load-Operation in das Bild-Spreadsheet 
implementiert werden. Die Gleichung wird anschlieBend 
der Zelle Al zugeordnet. Altemativ dazu konnen die Zellen 

fc^' 1 ^ r ? wei ™f emil ^° Ze ' , ' i °J 1 ' T2 - T3 50 ~^'"^i«toSS^SZSr 

si ssstrs 

daB der Zelle Al die Gleichung Al = lo- eine selektive Ansicht verschiedener, jedoch einander zuge- 
ordneter Bilder zu ermoglichen. Unter Verwendung des 
Eselsohr-Icons 70, des pop-up-Fensters oder derpop-up-Be- 
nutzer-Schnittstelle (Ul) kann sich der Benutzer durch die 



spondieren, 

ad(FRl) zugeordnet ist. 

Fiir eine solche MRA-Sitzung konnen die Bilder in den 
Zellen Al, Bl, CI, die von den Rahmen erhalten werden, 
entsprechenden Zeiten zugeordnet werden. Das Bild-Spre- 
adsheet kann auch Bildfunktionen wie frameO unterstutzen, 
die aus einem Speicher zu einer Zeit t in einer Zeitsequenz 
von Rahmen einen Rahmen zuruckfiihren, und mit den Glei- 
chungen fur die ZeHen 50 kbnnen Funktionsaufrufe ermog- 
Ucht werden, die in Zellen-Operationen zu verwenden sind. 
SemgemaB wiirde mit der Gleichung Al = load(frame(Tl)) 
das Bild in dem Rahmen zu der Zeit Tl wiedergewonnen 



Anzahl von Bildern "blattern", das heiBt diese laden oder 
durchscrollen, wobei das Minuszeichen ein zuriickblattem 
zu einem vorherigen Bild und das Pluszeichen ein Vorwarts- 
blattem zu einem nachsten Bild bedeutet. 

Bei alternativen Ausfuhrungsformen konnen Pfeile oder 
andere, Browser-ahnlich zu betatigende Icons in Verbin- 
dung mit oder anstelle der genannten Eselsohr-Icons 70 oder 
pop-up-Fenster oder UIs vorgesehen sein, wobei das auf 
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dem Schirm 48 in Fig. 2 gezeigte Bild T Spreadsheet auch un- 
ter Verwendung eines Internet-Browsers wie z. B. des Mi- 
crosoft Internet Browers, implementiert werden kann, wobei 
die Zellen SO zum Beispiel in Browserrahmen und/oder 
Webseiten implementiert sind. Bei anderen Ausfuhrungsfor- 5 
men konnen auch Java-Applets und/oder ActiveX Steuer- 
einheiten unter Verwendung der Microsoft ActiveX Techno- 
logie verwendet werden, um das Bild-Spreadsheet und/oder 
den Bild-Spreadsheet-Generator 10 oder Teile davon zu im- 
plementieren. Solche Java- Applets oder ActiveX Steuerein- 10 
heiten konnen dann einem Web-Browser oder anderen Inter- 
net-basierenden oder World- Wide- Web-basierenden oder 
Netzwerk-basierenden Anwendungen untergeordnet wer- 
den, so daB ein Benutzer auch von einer entfernten Station 
mit jedem Browser oder jeder Netzwerk-Plattform, die mit 15 
Java oder ActiveX komparibel ist, auf das Bild-Spreadsheet 
Zugriff nehmen kann. 

Auch unare Operationen sind fiir die Zellengleichungen 
verfiigbar, wie zum Beispiel inverse Funktionen, die ein 
Bild durch seine Negativdarstellung ersetzen, ebenso wie 20 
exponentielle Funktion wie die expO-Funktion als eine Po- 
tenz derBasis e des natiirlichen Logarithmus, sowie Wurzel- 
funktionen wie die Quadratwurzelfunktion sqrt(). Weiterhin 
konnen auch Filteroperationen unterstiitzt werden, wie zum 
Beispiel Farbfilter, Grauskalafilter und Filter zur Erhohung 25 
der Intensitat, wobei solche Filter Falschfarben-Verstarkun- 
gen erzeugen konnen, um bestimmte Merkmale wie Tumore 
oder Kontrastmittel zu unterscheiden. 

Die Bilder in den Zellen konnen weiteren Operationen 
unterworfen werden, wie zum Beispiel einer Schwellwert- 30 
bildung unter Verwendung von Schwellwert-Funktionen, 
wobei auch Bild-Segmentationsverfahren verwendet wer- 
den konnen. Als Beispiel zeigt Fig. 3, wie fur die Zellen Al 
bis CI ein 3D-Bild 72 eincs Kopfes in der Zelle 74 in einer 
Magnetresonanz-Abbildungssequenz (MRI) transformiert 35 
wird, um ein Bild 76 der darunterliegenden BlutgefaBe in 
der Zcllc 78 zu erzeugen und somit ein Bild 80 des Gehirns 
in der Zelle 82 zu zeigen. Es. kann zum Beispiel eine seg- 
ment- Funktion aufgerufen werden wie Bl = segment(Al) 
und CI = segment(Bl). Zusatzlich konnen die Bilder 72 bis 40 
76 addiert werden, so daB sie sich in drei Richtungen tiber- 
lappen und ein in einer anderen Zelle wie B2 wiedergegebe- 
nes, kombiniertes Bild entsteht. 

Weitere Operationen konnen implementiert warden, mit 
denen eine aufwendige Bildverarbeitung, wie zum Beispiel 45 
eine Projektion der maximalcn Intensitat (MTP oder MaxJP) 
oder eine Projektion der minimalen Intensitat (MinTP), er- 
leichtert wird und die als Zellenfunktionen implementiert 
werden konnen. Zum Beispiel kann gemaB Fig. 3 ein Ma- 
gnetresonanzbild (MR) 84 eines vaskularen Gewebes in ei- 50 
ner Datei mit dem Namen mrjvascular gespeichert werden. 
Unter Anwendung eines GefaB-Segmentationsverfahrens, 
das durch die Funktion segment_vessel() und eine MTP- 
Funktion call MJP() aufgerufen wird, kann das Bild 88 in 
der Zelle 90 mit der Bezeichnung A3 durch folgende Glei- 55 
chungen erzeugt werden: 

A2 = load_image('mr_vascular') und A3 = MTP(seg- 
ment_vessel(Al)), 

60 

die jeweils in der Zelle A2 bzw. A3 implementiert sind. Bei 
diesem Beispiel wird ein dem 3D-Bild 84 entsprechender 
Rohdatensatz in die Zelle A2 geladen, und die Zelle A3 wird 
so eingestellt, daB sie eine Zusammensetzung aus einer Pro- 
jektion der maximalen Identitat des Datensatzes und des Er- 65 
gebnisses des GefaB-Segmentationsverfahrens darstellt. 

Weitere Funktionen und Bildoperationen konnen imple- 
mentiert werden, wie zum Beispiel Bildverarbeitungsfunk- 
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tionen wie Kantenerfassung,.TiefpaB, HochpaB, BandpaB- 
Filterung und Rauschunterdruckung; ebenso wie Schwell- 
wertbildung; Graupegel-Fensterverarbeitung; Bildverstar- 
kung wie zum Beispiel Kantendetektion, TiefpaB-/Hoch- 
paB-Filterung, Weichzeichnung und Farbmodifikation; Seg- 
mentation wie statische und Bewegungs-basierende Opera- 
tionen; Morphogenie, Stereo-Korrespondenz; Visualisie^ 
rung von Volumina und Flachen; Vergleichsoperationen; 
Reduzieren/Maskieren; Objekterkennung zum Beispiel un- 
ter Verwendung von neuralen Netzwerken und Datenklassi- 
fizierem; Bildarchiv-Manipulation; Videobearbeitung und 
andere Bildoperationen wie interaktive, Maus-gesteuerte 
Rotation, Skalierung und Translation von Bildern. Dariiber- 
hinaus sind die Videodaten mehrdimensionai mit minde- 
stens einer Zeitachse und mindestens einer raumlichen 
Achse, wodurch Animationen von zum Beispiel eindimen- 
sionalen Kurven von Testergebnisseri, zweidimensionalen 
Rontgenstrahlbildern und dreidimensionalen MRI-Bildem 
implementiert werden konnen. Das beschriebene Bild-Spre- 
adsheet schafFt somit eine Plattform zum Organisieren, Ver- 
arbeiten und Editieren von Videosequenzen fur zum Bei- 
spiel medizinische und nichtmedizinische Anwendungen. 

Weiterhin konnen Funktionen und Operationen so einge- 
bettet werden, daB diese andere Funktionen oder Operatio- 
nen aufrufen, wie es oben bei der Erzeugung der Zelle A3 in 
Fig. 3 beschrieben wurde. Dariiberhinaus bezeichnet der 
Begriff "=" gemaB der hier verwendeten Definition eine Zu- 
weisung und/oder eine erneute Zuweisung von Zellen und 
Variablen, die die Zellen darstellen. Es konnen auch andere 
Gleichungs-, Programmierungs- und/oder operationelle 
Konvenlionen verwendet werden. Zum -Beispiel kann die 
Operation der Zuweisung alternativ auch durch das Symbol 
":=" bewirkt werden, wahrend die Boolschen Operationen 
aufgrund des Symbols "=" phne Doppelpunkt ausgefuhrt 
werden. Zum Beispiel kann gemaB Fig. 2 das Bild 64 in der 
Zelle A2 durch die folgende Boolsche Gleichung erzeugt 
werden: 

if count = 0 then A2: = (Cl-Al) else A2: = Bl-Al. 

Diese Gleichung kann in einem Programm verwendet 
werden, mit dem das Bild-Spreadsheet unter Verwendung 
eines Steuerparameters count aufgerufen wird. Solche logi- 
schen Programmiermethoden, die in bekannte numerische 
Spreadsheets implementiert sind, konnen somit in das be- 
schriebene Bild-Spreadsheet implementiert werden. Zusatz- 
lich dazu kann das Bild-Spreadsheet auch durch eine objekt- 
orientierte Programmierung implementiert werden, so daB 
solche Bild-Spreadsheets in andere Anwendungen impor- 
tiert werden konnen, wie zum Beispiel Textprogramme wie 
Microsoft Word und Datenbanken wie Microsoft Access, 
die mit der OLE-, DCOM- und/oder ActiveX- Technologien 
arbeiten. 

Registrierung (Justierung) 

Wenn sich der Patient zwischen zwei Aufnahmen von 
Bildern bewegt hat, fiihrt eine Subtraktion der Bilder gemaB 
der Beschreibung fur die Zellen Al, CI und A2 in Fig. 2 zu 
anatomisch falschen Ergebnissen, da nichtkorrespondie- 
rende Bereiche subtrahiert werden. Bei dem Bild-Spreads- 
heet-Generator 10 wird dieses Problem durch Verwendung 
eines Registrierungsverfahrens gelost, um die Bilder zum 
Beispiel durch Translation oder Morphogenie zu modifizie- 
ren, so dafi sie vor der Anwendung einer mathematischen 
Operation zwischen den Bildern anatomisch korrekt mitein- 
•ander korrespondieren. Mit dem Registrierungsverfahren 
kann auch die Bewegung, die das Subjekt ausgefuhrt hat, 
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abgeschatzt und eine Korrektur solcher Bewegungen durch- 
gefuhrt werden, wenn Operationen zwischen den Bildem 
ausgefiihrt werden. 

Mit der Registrierung wird eine anatomische Koharenz 



fahren verwendet werden, die z. B. auf dem medizinischen 
Gebiet bekannt sind, wie zum Beispiel ein Verfahren zur 
. Maximierung der beiderseitigen Informationen (MMI), so- 

Mil oer Kegistrierung wird eine anatomische Koharenz wie ein Verfahren zur Iteration des nachsten Punktes (TCP) 
t™^ 60 Datensa ! Z f sic hergesteUt. Eine anatomische 5 urn auf diese Weise eine Anpassung und Manipulation der 

Bilder in dem Bild-Spreadsheet vorzunebmen. 



Koharenz setzt voraus, daB wenn ein Punkt P A in einem Vo- 
lumen A mit dem gleichen Bereich eines Patienten korre- 
spondiert, wie ein Punkt P B in einem Volumen B, die regi- 
strierte Abbildung zwischen A und B, die durch den Bild- 
Spreadsheet-Generator 10 aufrechterhalten wird, eine sol- 
che anatomische Koharenz zwischen den Datensatzen bein- 
haltet 

Bestimmte MR-Aufnahmen, wie zum Beispiel bei neuro- 
logischen Untersuchungen, sind gut registriert (justiert), da 



Betriebsverfahren 

Das Bild-Spreadsheet-System 10 arbeitet in Verbindung 
mit dem Grafikgenerator 12 unter Anwendung des in Fig. 4 
gezeigten Verfahrens. Der Grafikgenerator 12 erhalt in ei- 
nem Schritt 92 Bilddaten und erzeugt in einem Schritt 94 ge- 
maB der Darstellungen in den Fig. 2 und 3 ein Gitter oder 



a v c -i_ j j « — ' *~~ ^ ma a Lwxiinj5u.il lu ucii 1' 1)1. z. unu j ein vjill 

der Kopf wahrend der Dauer der Aufnahme fixiert werden is Spreadsheet, urn zum Beispiel die Zellen Al bis A3 
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kann. Eine Bewegung des Patienten kann jedoch nicht bei 
der Aufnahme anderer Korperteile verhindert werden. Dies 
betrifft zum Beispiel Umfangsuntersuchungen, bei denen 
eine Bewegung des Patiententisches mit dem Patienten zwi- 
schen verschiedenen Aufhahmen erforderlich ist. Ein Ver- 20 
fahren, das angewendet werden kann, ist die automatische 
Registrierung von festen Korpern, bei dem durch den Bild- 
Spreadsheet-Generator 10 und/oder das Grafiksystem 14 
eine Transformation eines festen Korpers vorgenommen 
wird, urn bei mehrfachen Untersuchungen eine Registrie- 25 
rung zu erzielen. Zum Beispiel kann eine "fusion"-Taskkarte 
in den Taskkarten 18 enthalten sein, d. h. die durch den Gra- 
fikgenerator 12 mit dem Grafiksystem 14 verwendeten und 
verfiigbaren Funktionen konnen zu diesem Zwcck verwen- 
det werden. Unter Verwendung einer interaktiven Selektion 30 
von korrespondierenden Punkten zwischen zwei volumetri- 
schen Untersuchungen kann eine vollstandige automatische 
Registrierung durchgefuhrt werden, mit der zwei Untersu- 
chungen auf der Basis von Pixel/Voxel-Werten angepaBt 



B3, CI bis C3 usw. zu erzeugen. Es ist klar, daB auch mehr 
Zellen erzeugt werden konnen, wobei nur ein Teil der Zellen 
dargestellt ist und die iibrigen Zellen durch Scrollen durch 
die Zellen wie bei bekannten Spreadsheet-Systemen ange- 
zeigt werden konnen. Nach dem Empfang der Bilddaten in 
Schritt 92, die eine Reihe von Bildern mit Bild-Begren- 
zungszeichen wie Vorlaufen (Header) sein konnen, urn an- 
zuzeigen, welche Daten mit welchem Bild korrespondieren, 
unterteilt der Bild-Spreadsheet-Generator 10 den Bild-An- 
zeigebereich 48 in mindestens eine gleiche oder naherungs- 
weise gleiche Anzahl von Schirmbereichen oder Segmen- 
ten, wie Zellen vorhanden sind. Zum Beispiel wird eine 
Reihe von zwei bis vier Bildem mit einem Format von min- 
destens zwei mal zwei Zellen angezeigt; eine Reihe von Rinf 
oder sechs Bildern mit einem Format von mindestens zwei 
mal drei Zellen; eine Reihe von sieben bis neun Bildern mil 
einem Format von mindestens drei mal drei Zellen usw. 
Eine erneute Formatierung dieser Formate durch Hinzufu- 
gen von Reihen oder Spalten kann durch den Benulzer vor- 



werden, urn so eine geeignete Ausrichtung unter Verwen- 35 genemmen werden, wobei lecre Reihen und Spalten auto- 
dung der Registnerungsmarker 56 zu erreichen, die in dem matisch erzeugt werden konnen. urn ™s.,lirhp 7,u, n r,, r 



werden, um 

erreichen - die in dem matisch erzeugt werden konnen, um zusatzliche "zenen"fUr 
wiedergegebenen Bud-Spreadsheet und dessen ZeUen in die Anordnung und Wiedergabe von Ergebnissen von zS- 
den Grundeinstellungen unsichtbar smd. Eine solche auto- lenoperationen zu schaffen 

^? S l he J: . 1^°™^ MRA-Anwendungen sinn- Mit dem Verfahren werden dann in Schritt 96 die Bilder 

die Zellen geladen, so daB die Registrierung jedes Bildes 
die Registrierungsmarker 56 angepaBt ist. Nach dem La- 



voll, da die Art und die Pixel/Voxel-Statistiken von mehrfa- 40 
chen Untersuchungen einer gemeinsamen physikalischen 
Struktur sehr ahnlich sind, wie es in den Zellen Al bis CI 
der Fig. 2 gezeigt ist. Auf diese Weise konnen durch einen 
Benutzer und/oder durch ein automatisches Anpassungsver- 
fahren zur Registrierung, zum Beispiel durch ein neurales 45 
Netzwerk oder Klassifizierer, die Bilder zur Vorbereitung 
der weiteren Bild-Manipulationen gemafi obiger Beschrei- 
bung ausgerichtet werden. 

Eine andere verwandte Technik ist die interaktive, auf ei- 
ner Volumenableitung basierende Registrierung, bei der die 
Verfugbarkeit einer interaktiven und Echtzeit- Volumenab- 
leitung eine Registrierung des festen Korpers auf der Basis 
einer Visualisierung ermoglicht. Unter Verwendung eines 
solchen Registrierungsverfahrens konnen zwei Untersu- 
chungen gleichzeitig volumenabgeleitet sein, wie zum Bei- 
spiel die Volumenbilder 72, 76, 80 in Fig. 3. Der Benutzer 
und/oder die automatische Technik zur Registrierungsan- 
passung einschlieBlich neuraler Netzwerke oder Klassifizie- 
rer konnen interaktiv versuchen, die Uberlappung zwischen 
Bildem zu maximieren. Zum Implementieren einer solchen 
interaktiven Registrierung kann eine Echtzeit- Volumenab- 
leitung verwendet werden. Bei einer alternativen Ausfiih- 
rungsform konnen Transformationen verwendet werden, die 
einen volumetrischen Korper zur Anpassung an einen ande- 
ren deformieren, um eine automatische Verwerfungsregi- 
strierung durchzufiihren, mit der Bewegungen von nichtfe- 
sten Korpem kompensiert werden konnen. 

Es konnen auch andere bekannte Bild-Registrierungsver- 



den der Bilder in die Zellen wird das Verfahren in Schritt 98 
mit Benutzerbefehlen beaufschlagt, um die Bilder zu bear- 
beiten, wobei in Schritt 100 eine Gleichung eingegeben und 
in Schritt 102 eine Steuerung der Anzeige durchgefuhrt wer- 
den kann, die auch eine Fensteraufteilung, ein Zoomen und 
Panning-Funktionen umfassen kann, ebenso wie die Option, 
Operationen fur einen Satz von Zellen gleichzeitig zu ver- 
binden, und in Schritt 104 eine Bild-Spreadsheet-Steuerung 
50 moglich ist, die auch Druck- und Speicherbefehle umfaBt. 
Zum Eingeben einer Gleichung in Schritt 100 wahlt der 
Benutzer die Zellen zum Beispiel durch Bewegen eines her- 
vorgehobenen Fensters, mit dem die Rander der gegenwar- 
tig gewahlten Zelle hervorgehoben werden, oder auf andere 
Bei- 55 Weise durch Anklicken der gewunschten Zelle aus. Der Be- 
nutzer wahlt dann einen "define operation"-Befehl, der ein 
Icon auf dem Schirm 48 oder eine bestimmte Tastenkombi- 
nation, ein Mausknopf oder ein pull-down-Fensterbefehl 
sein kann. Daraufhin erscheint das Eintragsfenster 52, in das 
der Benutzer die gewunschte Operation oder den betreffen- 
den Ausdruck eingibt. 

Nach der Definition aller Operationen fur eine oder meh- 
rere Zelle kann der Benutzer das Bild-Spreadsheet ausfuh- 
ren, um die eingegebenen Operationen mit einem geeigne- 
ten Befehl wie zum Beispiel einer vorbestimmten Tasten- 
kombination oder durch ein pull-down-Menu zu implemen- 
tieren. Der Status der Ausfiihrung der Operationen kann 
uber die GUI 46 zum Beispiel durch Veranderung von Far- 
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ben auf dem Schirm oder durch Ausgabe des Wortes "ausge- 
fiihrt" angezeigt werden. 

Wahrend oder nach dem Eingeben der . Gleichung in 
Schritt 100 oder der Anzeigesteuerung in Schritt 102 kann 
die Gesamtbild-Spreadsheet-Steuerung in Schritt 104 akti- 5 
viert werden, die zum Beispiel einen Speicherknopf zum. 
Speichem des Bild-Spreadsheets und/oder aller ausgewahl- 
ter Zellen mit den gegenwartigen Einstellungen, Bildem 
und/oder Gleichungen umfaBt. Mit dem Schritt 104 kann 
auch ein neues Bild-Spreadsheet fur den gleichen Patienten 10 
und/oder eine Untersuchung erzeugt werden, oder es wird 
ein neues Bild-Spreadsheet fur andere Patienten und/oder 
Untersuchungen erzeugt, was dazu fuhrt, daB das Verfahren 
zu dem Schritt 92 zuriickspringt, um.die Bilddaten aufzu- 
nehmen. Der Benutzer kann mit dem Schritt 106 veranlaBt 15 
werden, vor der Aufnahme neuer Bilddaten die gegenwarti- 
gen Bilddaten beizubehalten oder zu loschen. Wenn die ge- 
genwartig geladenen Daten zu bearbeiten sind, so wird das 
Verfahren mit den Schritten 102 bis 106 wiederholt. 

Bei alternativen Ausfuhrungsforrhen kann der Schritt 104 20 
einen Befehl enthalten, mit dem die Ergebnisse der Bearbei- 
tung der gegenwartigen Bilder in dem Bild-Spreadsheet auf 
andere Taskkarten wie einer virtuellen Endoskop-Anwen- 
dung, iibertragen werden. Der Benutzer kann durch Anklik- 
. ken oder auf andere Weise einen gewiinschten Satz von Zel- 25 
len auswahlen, woraufhin die gewiinschte Taskkarte akti- 
viert wird, um die ausgewahlten Zellen zu verarbeiten. 

Dariiberhinaus kann der Schritt 104 Befehle umfassen, 
mit denen die eingegebenen Gleichungen als Bild-Spreads- 
heet-Schablone oder Script, das nicht unbedingt Patienten- 30 
spezifisch ist, auf zukiinftig importierte Bilddaten angewen- 
det wird. Solche Bild-Spreadsheet-Scripte konnen dann ge- 
laden und auf neue Bilddaten oder Untersuchungen ange- 
wendet werden. Zum Beispiel kann gemaB Fig. 2 der ProzeB 
des Entfemens von Hintergrund-Gewebe aus den eingege- 35 
benen MRA-Daten durch die Bild-Subtraktionsgleichung in 
der Zelle A2 so implementiert werden, daB diese auf alle 
kompatiblen eingegebenen Bilddaten angewendet wird und 
nicht nur auf die Bilddaten fur die Bilder 58 bis 66. 

40 

Alternative Ausfuhrungsformen 

Bei eincr alternativen Ausfuhrungsform kann das Gitter 
der Zellen, wie es in den Fig. 2 und 3 gezeigt ist, unter- 
schiedliche GroBen aufweisen. Die Zellen konnen die ur- 45 
spriinglichen Abtastdaten, eine einzige mathematische For- 
mel oder Programme mit einer Mehrzahl von Befehlen ent- 
halten. Jede Zelle des Bild-Spreadsheets kann als Operand 
fiir solche Berechnungen verwendet werden. Probleme im 
Zusammenhang mit einer Fehlanpassung der Auflosung 50 
werden durch automatische Interpolation gelost. Zusatzhch 
bietet jede einzelne Zelle eine Vielzahl verschiedener Optio- 
nen fur die Visualisierung, wie zum Beispiel Zellen, die in- 
teraktiv schnittweise Ansichten, eine Projektion maximaler 
Intensitat (MTP) oder simulierte Rdntgenstrahlenerzeugung, 55 
eine Volumenerzeugung usw. darstellen konnen. Die inter- 
aktiven Parameter verandem sich in Abhangigkeit von der 
Art der Visualisierung. Wahrend der Betrachtung eines 
Schnittes kann der Benutzer zum Beispiel die Parameter fur . 
den Schnitt, die Neigung, den Zoomfaktor, den Fenster- 60 
wechsel und Pegel auswahlen, wahrend bei. einer 3D An- ■ 
sicht Steuereinheiten fiir eine Kameraposition und andere 
Parameter usw. hinzugefugt sind. 

Bei einer anderen alternativen Ausfuhrungsform kann ein 
ZusammenschluB von Visuaiisierungen durchgefuhrt wer- 65 
den, durch den Visuaiisierungen in verschiedenen Zellen zu- 
sammengefaBt werden, so daB Anderungen, die bei den Dar- 
stellungsparametern in einer Zelle der zusammengeschlos- 
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senen Gruppe auftreten oder implementiert werden, automa- 
tisch auf den Rest der Zellen in der Gruppe angewendet wer- 
den. Diese Darstellungsparameter umfassen das Fenster, 
den Pegel, den Zoomfaktor und die Neigung fur eine 2D- 
Ansicht; sowie den Standpunkt, die Kamera-Parameter, Be- 
zugsebenen, Transferfunktionen usw. fur eine 3D-Ansicht, 
ebenso wie eine Filterung und andere Verfahren zur Bild- 
transformation. Zum Beispiel konnen gemaB Fig. 2 die Bil- 
der 58 bis 66 in den Zellen A 1 , A2, B2 bzw. C 1 in der Weise 
zusammengeschlossen werden, daB eine Anderung eines der 
Visualisierungsparameter von einer Zelle den Visualisie- 
rungsparameter der ubrigen, zusammengeschlossenen Zel- 
len verandert. Bei diesem Beispiel kann eine Anderung der 
Auflosung zum Zoomen in einen Teil des Bildes 62 in der 
Zelle C2 dazu fuhren, daB der Bild-Spreadsheet-Generator 
10 die Auflosung in den Zellen Al, A2, Bl entsprechend an- 
dert, um in einen korrespondierenden Teil der entsprechen- 
den Bilder 58 bis 64 zu zoomen: 

Bei einer anderen alternativen Ausfuhrungsform kann ein . 
ZusammenschluB der interaktiven Messung und des interes- 
sierenden Bereiches (ROT) vorgenommen werden. Wenn in 
einer Zelle der zusammengeschlossenen Gruppe interaktive 
Messungen wie zum Beispiel Messungen des Abstandes, 
der Flache, des Volumens, der Histogramm/Intensitatsei- 
genschaften usw. vorgenommen werden, werden die glei- 
chen Messungen auf die anderen Mitglieder der Gruppe ge- 
spiegelt. Fiir auf einem Histogramm bzw. einer Intensitat ba- 
sierende Messungen kann das Ergebnis in jedem Volumen 
anders sein. Die ROI-Selektion und die Position der Zeiger 
oder anderer grafischer Indikatoren in Bezug auf Merkmale 
in den Bildern werden in ahnlicher Weise zusammenge- 
schlossen. * 

Der Bild-Spreadsheet-Generator 10 implementiert cincn 
vollstandigen Programmiersprachen-Interpreter fur Aus- 
drucke und Gleichungen in den Zellen. Solche Ausdrucke 
und Gleichungen sind nicht nur einzeilige arithmetische, bi- 
nare Operationen oder unare Funktionen, sondem konnen 
auch mehrzeilige Programme sein, die temporare Variablen, 
Schleifen, Funktionsdefinitionen und andere Arten von an- 
spruchsvollen Ablaufsteuerungen und Rechenvorschriften 
enthalten. Die Ausdrucke konnen auch Aufrufe fur durch ei- 
nen Benutzer bereitgestellte externe Funktionen und voll- 
standige Programme enthalten. Im Ermessen des Benutzers 
konnen einzelne Ausdrucke und vollstandige Verarbeitungs- 
bogen gespeichert und wieder aufgerufen werden. 

Die Daten in einer Zelle miissen nicht unbedingt an jeder 
raumlichen Stelle einen einzigen Skalar aufweisen. Daten- 
satze konnen auch Vektor-bewertet sein, wobei die fur eine 
raumliche Stelle gespeicherten Informationen aus einer Li- 
ste von Datenelementen mit beliebiger Lange bestehen kon- 
nen. Die Anwendung eines Gradient-Operators auf ein Vo- 
lumen erzeugt zum Beispiel eih resultierendes Volumen, in 
dem jedem raumlichen Ort drei FlieBkommawerte zugewie- 

Operationen sind zwischen Modalitaten und Arten von 
Funktionen iiberladen; dies bedeutet, daB der Bild-Spreads- 
heet-Generator 10 automatisch die geeignete Operation aus 
dem Ausdruck und den ziigrundeliegenden Daten bestimmt. 
Fiir so unterschiedliche Operationen wie zum Beispiel sca- 
lare und vektorielle Operationen wird zum Beispiel in dem 
Fall, in dem der Benutzer scalanvertige Volumina addiert, 
die scalare Addition verwendet und ein scalarwertiges Er- 
gebnis erzeugt. Wenn jedoch vektorwertige Volumina ad- 
diert werden, wird eine andere Art von Operation verwen- 
det, die eine Vektoraddidon implementiert, und das Ergeb- 
nis ist ein vektorwertiges Volumen, Die Kompatibilitat die- 
ser Arten von Operanden in einer Gleichung wird automa- 
tisch gepriift, und die Gleichung wird durch den Bild-Spre- 
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adsheet-Generator 10 ausgewertet, wenn die Operanden 
kompatibel sind. Andernfalls informiert der Bild-Spreads- 
heet-Generator 10 den Benutzer iiber das Bildsystem 14 
fiber einen Fehler und/oder die Art einer Fehlanpassung und 
verhindert eine Ausfuhrung der Operation. 5 

Mit der obigen Beschreibung wird ein erfindungsgetnaBer 
Bild-Spreadsheet-Generator 10 und ein entsprechendes "\fer- 
fahren anhand einer bevorzugten Ausfuhrungsform be- 
schrieben. Es sind jedoch zahlreiche Modifikation und An- 
derungen moglich, ohne den Schutzumfang der Erfindung io 
zu verlassen. Auch wenn zum Beispiel im Zusammenhang 
mit der bevorzugten Ausfuhrungsform ein Bild-Spreadsheet 
beschrieben wird, gehort auch eine Bild-Datenbank, die in 
Verbindung mit dem Bild-Spreadsheet-Generator 10 in der 
oben beschriebenen Weise arbeitet, zu der Erfindung. Die 15 
Beschreibung dient somit nur zur Verdeutlichung und hat ' 
keine beschrankende Wirkung. 

Patentanspruche 

20 

1. Bildsystem zum Erzeugen eines Bild-Spreadsheets 
mit: 

einem Prozessor zum Anzeigen einer grafischen Benut- 
zerschnittstelle (GUI) auf einem Display; und 
einem Bild-Spreadsheet-Generator, mit dem bewirkt 25 
wird, daB die GUI ein Spreadsheet-Gitter mit einer 
Mehrzahl von Zellen mit zugeordneten Registrierungs- 
markern anzeigt, wobei jeder Zelle eine Gleichung zu- 
geordnet werden kann; 

wobei der Spreadsheet-Generator auf Bilddaten mit zu- 30 
geordneten Registrierungsdatcn zum Anzeigen einer 
Mehrzahl von Bildern in einem Teil der Mehrzahl von 
Zellen anspricht, wobei die Mehrzahl von Bildern so 
ausgerichtet und orientiert ist, daB die Registrierungs- 
marker der entsprechenden Zellen zusammenpassen; 35 

wobei der Bild-Spreadsheet-Generator auf Benutzer- 
Eingaben zum Implementieren eines Satzes von Glei- 
chungen in einem ersten Satz von Zellen anspricht, urn 
erste Bilder in dem ersten Satz von Zellen zu transfer- 40 

2. Bildsystem nach Anspruch 1, bei dem der Bild- 
Spreadsheet-Generator vorbestimmte Bild-transfor- 
mierende Funktionen implementiert, die durch einen 
Benutzer individuell angegeben werden, urn aus den 45 
ersten Bildern transformierte Bilder in einem zweiten 
Satz von Zellen zu erzeugen. 

3. Bildsystem nach Anspruch 2, bei dem die vorbe- 
stimmten Bild-transformierenden Funktionen mathe- 
matische Funktionen sind. 50 

4. Bildsystem nach Anspruch 2, bei dem die vorbe- 
stimmten Bild-transformierenden Funktionen aus einer 
Gruppe ausgewahlt sind, die eine Schwellwertbildung, 
eine Graupegel-Fensterbildung, eine Bildverstarkung, 
eine Segmentation, eine Gestaltbildung, eine Stereo- 55 
Korrespondenz, eine Visualisierung, Vergleichsopera- 
tionen, ein Stutzen/Maskieren, eine Objekterkennung, 
eine Bildarchiv-Manipulation und eirie Videobearbei- 
tung umfafit. 

5. Bildsystem nach Anspruch 1, bei dem die Bilddaten 60 
eine Mehrzahl von Magnetresonanzbild (MRI)-Rah- 
men umfassen. 

6. Bildsystem nach Anspruch 5, bei dem die MRI- 
Rahmen mit Bildern einer Magnetresonanz-Angiogra- 
phie (MRA) korrespondieren, die Bilder umfassen, die 65 
das Eindringen eines Kontrastmittels in ein vaskulares 
System zeigen. 

7. Bildsystem nach Anspruch 6, bei dem die MRA- 
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Bilder einen zeitlichen Fortschritt des Eindringens des 
Kontrastmittels zeigen. 

8. Bildsystem nach Anspruch 7, bei dem der Bild- 
Spreadsheet-Generator eine Subtraktionsgleichung im- 
plementiert, um ein erstes Bild des vaskularen Systems 
ohne das Kontrastmittel aus einem zweiten Bild des 
vaskularen Systems mit Kontrastmittel zu filtern, wo- 
durch ein FluB des Kontrastmittel in dem System dar- 
gestellt wird. 

9. Bildsystem nach Anspruch 1, bei dem der Bild- 
Spreadsheet-Generator zweidimensionale Bilder in der 
Mehrzahl von Zellen erzeugt. 

10. Bildsystem nach Anspruch 1, bei dem der Bild- 
Spreadsheet-Generator dreidimensionale Bilder in der 
Mehrzahl von Zellen erzeugt. 

11. Bildsystem nach Anspruch 1, bei dem der Bild- 
Spreadsheet-Generator in der Mehrzahl von Zellen 
Text erzeugt. 

12. Bildsystem nach Anspruch 1, bei dem der Bild- 
Spreadsheet-Generator fiber die GUI ein pop-up-Fen- 
ster erzeugt, um eine Eingabe durch einen Benutzer in 
eine entsprechende Zelle zu erleichtern. 

13. Bildsystem nach Anspruch 1, bei dem der Bild- 
Spreadsheet-Generator in einer ersten Zelle ein Esels- 
ohr-Icon erzeugt, das betatigbar ist, um selektiv eines 
einer Mehrzahl von Bildem wiederzugeben, die der er- 
sten Zelle zugeordnet sind. 

14. Bildsystem nach Anspruch 1, bei dem der Bild- 
Spreadsheet-Generator eine pop-up-Benutzerschnitt- 
stelle (Ul) erzeugt, die betatigbar ist, um selektiv eines 
einer Mehrzahl von Bildern wiederzugeben, die einer 
ersten Zelle zugeordnet sind. 

15. Bildsystem nach Anspruch 1, bei dem die Bilder 
mit einem Bildverfahren erzeugt werden, das aus einer 
Gruppe ausgewahlt ist, die eine Magnetresonanz (MR), 
eine Computertomographie (CT), eine Positronen- 
Emissionstomographie (PET), eine Einzel-Photonen- 
Emissions-CT (SPECT) und 3D Ultraschall umfaBt. 

16. Bildsystem nach Anspruch 1, bei dem der Bild- 
Spreadsheet-Generator eine zusammengefaBte Visuali- 
sierung von ersten Bildern durchfiihrt, wonach der 
Bild-Spreadsheet-Generator die ersten Bilder in einen 
ersten Satz von Zellen transformiert, die so zusammen- 
gefaBt werden, daB eine Transformation eines Bildes in 
einer Zelle entsprechend der zusammengefaBten Vi- 
sualisierungs-Parameter auf das entsprechende, in min- 
destens einer zweiten Zelle wiedergegebene Bild aus- 
gefiihrt wird. 

17. Bildsystem zum Erzeugen eines Bild-Spreadsheets 

einem Prozessor zum Anzeigen einer grafischen Benut- 
zerschnittstelle (GUI) auf einem Display; und ' 
einem Bild-Spreadsheet-Generator, mit dem bewirkt 
wird, daB die GUI ein Spreadsheet-Gitter mit einer 
Mehrzahl von Zellen mit zugeordneten Registrierungs- 
markem anzeigt, wobei jeder Zelle eine Gleichung zu- 
geordnet werden kann, sowie zum Anzeigen von mehr- 
dimensionalen Bildem; 

wobei der Bild-Spreadsheet-Generator auf einen Satz 
von Gleichungen in einem ersten Satz von Zellen an- 
spricht, um erste Bilder in dem ersten Satz von Zellen 
zu transforrhieren; 

wobei der Bild-Spreadsheet-Generator auf Bilddaten 
anspricht, die mit mehrdimensionalen Bildern korre- 
spondieren, zum automatischen Ausrichten der Bilder 
durch Transformationen des ersten Satzes von Zellen 
vor der Anwendung des Satzes von Gleichungen auf 
diesen ersten Satz von Zellen. 
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18. Bildsystem nach Anspruch 17, bei dem die Trans- 
formationen zum Ausrichten starre Transformationen 

19. Bildsystem nach Anspruch 17, bei dem die Trans- 
formationen zum Ausrichten verwerfende Transforma- 5 
tionen sind. \ 

20. Bildsystem nach Anspruch 17, bei dem der Bild- 
Spreadsheet-Generator eine anatomische Koharenz 
zwischen verschiedenen Bildem erzeugt, die in ver- 
schiedenen Zellen des Bild-Spreadsheets angezeigt 10 
werden. 

21. Verfahren zum Implementieren eines Bild-Spre- 
adsheets mit folgenden Schritten: 

Anzeigen eines Spreadsheet-Gitters mit einer Mehr- 
zahl von Zellen mit einer grafischen Benutzerschnitt- 15 
stelle(GUI); 

Zuordnen einer Gleichung zii mindestens einer der 
Mehrzahl von Zellen; 

Verarbeiten von Bilddaten mit zugeordneten Registrie- 
rungsdaten zum Anzeigen einer Mehrzahl von Bildem 20 
in einem Teil der Mehrzahl von Zellen; 
Ausrichten und Orientieren der Mehrzahl von Bildem 
in den entsprechenden Zellen, so daB die Registrie- 
rungsmarker von entsprechenden Zellen zusammen- 
. passen; und 25 
Transformieren von ersten Bildem in einem ersten Satz 
von Zellen gemaB der mindestens einen Gleichung. 
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